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(54) Title: METHOD AND SYSTEM FOR RELOCATING HIDDEN OBJECTS IN IMAGES 

(54) Bezeichnung: VERFAHREN UND SYSTEM ZUM WIEDERFINDEN VON VERDECKTEN OBJEKTEN IN BILDERN 

(57) Abstract 

The invention relates to a method for 
relocating objects in images. An object 
reference is correlated with image values. 
When the object is partially covered in the 
image, the image values which are located 
within the covered area in the image are re- 
placed by grey scale values of the object 

before the correlation is carried out. A sys- ^ Y>- 10 

tern for relocating objects in images is pro- 
vided with a camera for filming the image, 
an imagery storage unit for storing an object 
reference and an imagery processor for re- 
placing grey scale values which are located 
within the covered area, whereby said grey 

scale values are replaced by grey scale val- ^BL^" 11 &m*HXJW* Q2 

ues of the object reference. The inventive ^^^r w 

system is also provided with a correlation 
unit which correlates the image with the ob- 
ject reference, whereby the image has been 
changed by the imagery processor. 

(57) Zusammenfassung 

Bei einem Verfahren zum 
Wiederfinden von Objekten in Bildem 

wird eine Objektreferenz mit Bildwerten korreliert. Bei einer teiiweisen Verdeckung des Objektes im Bild werden diejenigen Bildwerte, 
die im Bild innerhalb des Verdeckungsbereiches liegen, durch Grauwerte des Objektes ersetzt, bevor die Korrelation durchgefUhrt wird. 
Em System zum Wiederauffinden von Objekten in Bildem hat eine Kamera zur Aufnahme eines Bildes, einen Bilddatenspeicher zur 
Speicherung einer Objektreferenz, einen Bilddatenprozessor zum Ersetzen von Grauwerten, die innerhalb eines Verdeckungsbereiches 
liegen, durch Grauwerte der Objektreferenz, und eine Korrelationseinheit, die das vom Bilddatenprozessor verflnderte Bild mit der 
Objektreferenz korreliert. 
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bei der Ausblendung ganzer Bildteile. Durch Speicherung der einmal gewonnenen 
Information uber das Aussehen des Objektes und durch Verwendung dieser Information 
beim Auffinden des Objektes hinter einer Verdeckung, werden Fehler bei der 
Positionsbestimmung erheblich reduziert. 
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Diese Aufgabe wird gelost durch das Verfahren zum Wiederfinden von Objekten in Bildern 
gemaB Patentanspruch 1 und das System zum Wiederfinden von Objekten in Bildern 
gemaB Patentanspruch 6. Weitere vorteilhafte Merkmale, Aspekte und Details der 
Erfindung ergeben sich aus den abhangigen Ansprtichen, der Beschreibung und den 
Zeichnungen. 

Das erfindungsgemaBe Verfahren zum Wiederfinden von Objekten in Bildern umfaBt eine 
Korrelation einer Objektreferenz mit Bildwerten, wobei bei einer teilweisen Verdeckung 
eines Objektes die Bildwerte, die im Bild innerhalb des Verdeckungsbereiches liegen, 
durch Grauwerte des Objektes bzw. der Objektreferenz ersetzt werden, bevor die 
Korrelation durchgefiihrt wird. Dadurch werden die Fehler beim Wiederfinden des 
Objektes erheblich reduziert. 

Bei dem Verfahren wird bevorzugt ein Referenzbild einer Storfensterung unterzogen, um 
die Bildwerte innerhaib einer Stormaske durch die Grauwerte des Objektes zu ersetzen. 

Vorteilhafterweise wird das Referenzbild einer Objektfensterung unterzogen, um die 
Objektreferenz zu erhalten. 

Bei der vorliegenden Erfindung wird insbesondere vor der Verdeckung das Bild des 
vollstandigen Objektes gespeichert um bei einer teilweisen Verdeckung die Position des 
Objektes zu ermitteln. Vorteilhafterweise werden im Bild verdeckte Teile des Objektes 
durch Teile einer gespeicherten Referenz erganzt. 

Das erfindungsgemaBe System zum Wiederfinden von Objekten in Bildern umfaBt eine 
Kamera zur Aufnahme eines Bildes, einen Bilddatenspeicherzur Speicherung einer 
Objektreferenz, einen Bilddatenprozessor zum Ersetzen von Grauwerten, die im Bild 
innerhalb eines Verdeckungsbereiches liegen, durch Grauwerte der Objektreferenz, und 
eine Korrelationseinheit, die das vom Bilddatenprozessor veranderte Bild mit der 
Objektreferenz korreliert. Das erfindungsgemaBe System ist in der Lage, den 
Verdeckungsbereich prazise zu erkennen und eine genaue Objektposition im Bild zu 
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1 

VERFAHREN UNO SYSTEM ZUM WIEDERFINDEN VON VEROECKTEN OBJEKTEN IN BILOERN 

Die Erfindung betrifft ein Verfahren zum Wiederfinden von Objekten in Bildern durch 
Korrelation einer Objektreferenz mit Bildwerten, sowie ein System zum Wiederfinden von 
Objekten in Bildern. 

Fur zahlreiche Anwendungen ist es notwendig, daB Objekte in Bildern oder digitalen 
Bildsequenzen automatisch wiedergefunden werden. Dabei kann es jedoch vorkommen, 
daB Teile des Objektes verdeckt sind. 

Bei einem bekannten Verfahren, das die Wiederfindung von Objekten in Bildern ermoglicht, 
wird von dem zu suchenden Objektbild eine Referenz gespeichert und diese Referenz wird 
anschlieBend innerhalb eines begrenzten Bereiches mit dem Bild korreliert. Bei der 
Korrelation wird nur der Teil der Referenz benutzt, dessen Bildpunkte zum Objekt gehoren. 
Durch Objektfensterung bzw. Objektmaskierung werden diejenigen Teile, die nicht zum 
Objekt gehoren, ausgeblendet. Der Ort des Korrelationsmaximums iiefert die aktuelle 
Position des Objektes im Bild, weil dort die Bildpunkte mit den Objektpixeln 
ubereinstimmen. 

Bei diesem bekannten Verfahren besteht jedoch das Problem, daB die Korrelation nicht 
mehrdie korrekte Position des Objektes Iiefert, wenn das Objekt teilweise in Verdeckung 
gerat Der Grund hierfur liegt darin, daB in dem verdeckten Bereich mit Bildpunkten 
korreliert wird, die nicht zum Objekt gehoren. Durch die Abdeckung wird nur noch ein Teil 
des Objektes mit der Referenz verglichen, was zu einer ungenauen Erkennung des 
Objektes bzw. der Position des Objektes fuhrt. Eine unprazise Erkennung des 
Verdeckungsbereiches ergibt sehr schnell eine fehlerhafte Objektposition im Bild. 

Es ist daher die Aufgabe der vorliegenden Erfindung ein Verfahren zum Wiederfinden von 
Objekten in Bildern anzugeben, das eine prazise Erkennung und eine genauere Ermittlung 
der Objektposition ermoglicht. Weiterhin soli ein System zum Wiederfinden von Objekten 
in Bildern geschaffen werden, mit dem die Objektposition genau ermittelt werden kann. 



WO 00/43955 



2 



PCT/DE99/04064 



Diese Aufgabe wird gelost durch das Verfahren zum Wiederfinden von Objekten in Bildern 
gemaB Patentanspruch 1 und das System zum Wiederfinden von Objekten in Bildern 
gemaB Patentanspruch 6. Weitere vorteilhafte Merkmale, Aspekte und Details der 
Erfindung ergeben sich aus den abhangigeri Anspriichen, der Beschreibung und den 
5 Zeichnungen. 

Das erfindungsgemaBe Verfahren zum Wiederfinden von Objekten in Bildern umfaBt eine 
Korrelation einer Objektreferenz mit Bildwerten, wobei bei einer teilweisen Verdeckung 
eines Objektes die Bildwerte, die im Bild innerhalb des Verdeckungsbereiches liegen, 
10 durch Grauwerte des Objektes bzw. der Objektreferenz ersetzt werden, bevor die 
Korrelation durchgefuhrt wird. Dadurch werden die Fehler beim Wiederfinden des 
Objektes erheblich reduziert. 

Bei dem Verfahren wird bevorzugt ein Referenzbild einer Storfensterung unterzogen, urn 
1 5 die Bildwerte innerhalb einer Stdrmaske durch die Grauwerte des Objektes zu ersetzen. 

Vorteilhafterweise wird das Referenzbild einer Objektfensterung unterzogen, um die 
Objektreferenz zu erhalten. 

20 Bei der vorliegenden Erfindung wird insbesondere vor der Verdeckung das Bild des 

vollstandigen Objektes gespeichert um bei einer teilweisen Verdeckung die Position des 
Objektes zu ermittein. Vorteilhafterweise werden im Bild verdeckte Teile des Objektes 
durch Teile einer gespeicherten Referenz erganzt. 

25 Das erfindungsgemaBe System zum Wiederfinden von Objekten in Bildern umfaBt eine 
Kamera zur Aufnahme eines Bildes, einen Bilddatenspeicher zur Speicherung einer 
Objektreferenz, einen Bilddatenprozessor zum Ersetzen von Grauwerten, die im Bild 
innerhalb eines Verdeckungsbereiches liegen, durch Grauwerte der Objektreferenz, und 
eine Korrelationseinheit, die das vom Bilddatenprozessor ver§nderte Bild mit der 

30 Objektreferenz korreliert. Das erfindungsgemaBe System ist in der Lage, den 

Verdeckungsbereich prazise zu erkennen und eine genaue Objektposition im Bild zu 
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eine Korrelationseinheit, die das vom Bilddatenprozessor veranderte Bild mit der 
Objektreferenz korreliert. 
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intemationalen Anmeldung im Anmeldezeitpunkt hinausgeht, wurde vorgelegt 

Die Ertdarung, daB cfie in computertesbarer Form erfaBten Informationen dem schriftiichen Sequenzprotokoll entsprechen, 
wurde vorgelegt 



□ 
□ 
□ 
□ 

□ 



2. Q Bestlmmte AnsprQche haben slch als nlcht recherchlerbar erwlesen (siehe Feld I). 

3. Q Mangelnde ElnherUlchkett der Erflndung (siehe Feld II). 

4. Hinsichtlich der Bezetchnung der Erflndung 

| | wird der vom Anmelder eingereichte Worttaut genehmigt. 
|X| wurde der Worttaut von der Behdrde wie folgt festgesetzt 

VERFAHREN UND SYSTEM ZUM WIEDERFINDEN VON VERDECKTEN OBJEKTEN IN BILDERN 



5. Hinsichtlich der Zusammenfassung 

nn wird der vom Anmelder eingereichte Worttaut genehmigt. 

^ wurde der Worttaut nach Regel 38.2b) in der in Feld III angegebenen Fassung von der Behdrde festgesetzt Der 
| | Anmelder kann der Behdrde innerhalb eines Monats nach dem Datum der Absendung dieses intemationalen 
Recherchenberichts eine Stellungnahme vortegen. 

6. Folgende Abbildung der Zelchnungen ist mrt der Zusammenfassung zu verdffentlichen: Abb. Nr. ]_ 



|X| wie vom Anmelder vorgeschlagen Q keinederAbb. 

| | weil der Anmelder selbst keine Abbildung vorgeschlagen hat 
| | weil diese Abbildung cle Erflndung besser kennzeichnet 



FormWatt PCT/ISA/210 (Blatt 1) (Juli 1998) 



INTERNAT10NJW) RECHERCHENBERICHT 



A. KLASSIFIZ1ERUNG DES ANMEL 

G06T7/00 



IPK 7 



^^^^ttonalM AMenzetchon 

P AlE 99/04064 



NST ANDES 



Nach der International en Patent Wassmkation (IPK) Oder nach der nattonalen Ktassiflkatton und der IPK 



B. RECHERCHIERTE GEBIETE 


Recherchterter MindestprGfstoff (KtessJfikattonesystem und rOaasfflkattonaeymbole ) 

IPK 7 G01S G06T 


Recherchierte aber nicht zum MindestprOfetoff geh&rende VerdffentNchungen, sow 


ett deee unter die recherchterten Gebiete fallen 


WShrend der Intematlonalen Recherche konsuMerte elektronteche Datenbank (Name der Oatenbank und evtl. venwendete Suchbegriffe) 


C. ALS WESENTUCH ANGESEHENE UNTERLAGEN 


Kategorie* 


Bezeichnung der Veroffentlichung, soweit erforderlteh unter Angabe der tn Betracht kommenden Telle 


Betr. Anspruch Nr. 


Y 


US 5 706 362 A (YABE SANAE) 

6. Januar 1998 (1998-01-06) 

Zusammenfassung 

Spalte 4, Zelle 50 - Zelle 58 

Spalte 5, Zelle 45 - Zelle 48; Abblldungen 

2,3 


1-6 


Y 


W0 97 06631 A (PASTOR Y0SEF ; SPIEGEL EHUD 
(ID) 20. Februar 1997 (1997-02-20) 
Anspruche 1,4 


1-6 


A 


W0 98 18261 A (FOX SPORTS PRODUCTIONS INC) 
30. April 1998 (1998-04-30) 
Seite 3, Zeile 1 - Zeile 25 


1-6 


A 


DE 36 06 009 C (LICENTIA GMBH) 
28. Marz 1991 (1991-03-28) 
Zusammenfassung; Anspruche 1,2 




1-6 


I 1 Wetter© Verdffentfichungen sind der Forteetzung von FekJ C zu 
i 1 entnehmen 


|X j Siehe Anhang PatentfamiUe 




° Besondere Kategorlen von angegebenen Veroffentlichungen "T" Spate re Verdffentlichung, cfie nach dem intematlonalen Anmeidedatum 

■A" Verdffentlichuna, die den aligemeinen Stand der Technik definiert, 2^Lf^r^^J^fS^f^I!i V ^!^Sl^ 1 ^!^ ^"^J^U it^S f i^ f ^ 
aber nicht als Beaonders bedeutsam anzusehen 1st Anrneldung 

Erfindung zugrundeliegenden Prinzipa oder der ihr zugrundeliegenden 

"E" alterea Dokument, das jedoch erst am oder nach dem intemabonalen Theorie angegeben tef 

Anmeidedatum veroffentficht worden 1st - x . veroffentlichung von besonderer Bedeutung; die beanspruchte Erfindung 

"L" Veroffentlichung, die geelgnet 1st, elnen Prtoritatsanapruch zweffelhaft er- kann alteln aufgrund dieser Veroffentirchurrg nicht ate neu oder auf 
schelnen zu laseen, oder durch cfie das Verdffentl rchungsdatum elner erfinderiecher Tatigkeit beruhend betrachtet werden 
an*>ren im Recherchenbericht genannten Veroffentllchung bele£werden -y- Veroffentllchung von besonderer Bedeutung; die beanspruchte Erfindung 
soil oder die aus einem anderen besonderen Grund angegeben 1st (wle kann nicht ate auf erflnderlscher Tatlgkeft beruhend betrachtet 
ausgefuhrt) werden, wenn c9e Verdffentlichung mlt elner oder mehreren anderen 

"O" Verdffentlichung, die steh auf eine mQndliche Offenbarung, Veroffentlichungen cfieaer Kategorie In Verblndung gebracht wind und 
sine Benutzung, eine Ausstellung oder andere Maflnahmen bezieht cfleee Verblndung fur elnen Fachmann nahellegendlst 

"P" Veroffentlichung, die vor dem intemationaten Anmeidedatum, aber nach ... w~.*««~*t~K. u^u^ j^iu^ d«*«^««hi« 
dem beanspn£nten Priorltatsdarum veroffentiicht worden 1st * Verdffentlichung, die Miffed derselben Patentfamilie 1st 


Datum des 


Abachlusses der Intemationaten Recherche 


Abaendedatum des Intematlonalen Recrterchenbericrits 


25. April 2000 


09/05/2000 




Name und Postanschrift der Intematlonalen Recherchenbehdrde 
Europai aches Patentarnt. P.B. 5618 Paten tiaan 2 
NL-2280HVRIJswtjk 
Tel. (+31-70) 340-2040. Tx. 31 651 epo nl. 
Fax: (+31-70) 340-3016 


Bevolfamachtigter Bediensteter 

Bouchaala, N 
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VERTRAG UBE 



INTERNATIONALE ZUSAM^NARBEIT AUF DEM 

GEBIET DES PATENTWESENS 



PCT 

INTERNATIONALER VORLAUFIGER PRUFUNGSBERICHT 

(Artikel 36 und Regel 70 PCT) 



Aktenzeichen des Anmelders Oder Anwalts 
P609080 PCT 


siehe Mitteilung uber die Obersendung des intemationalen 
WEITERES VORGEHEN voriaufigen Prufungsberichts (Formblatt PCT/IPEA/416) 


Internationales Aktenzeichen 
PCT/DE99/04064 


Internationales Anmeldedatum (Tag/Monat/Jahr) 
22/12/1999 


Prioritatsdatum (Tag/Monat/Tag) 
23/01/1999 


Internationale Patentklassifikation (IPK) oder nationale Klasstfikation und IPK 
G06T7/00 


Anmelder 

LFK-LENKFLUGKORPERSYSTEME GMBH et al. 



1. Dieser internationale vorlaufige Prufungsbericht wurde von der mit der intemationalen voriaufigen Prufung beauftragten 
Behorde erstellt und wird dem Anmelder gemaG Artikel 36 ubermittelt. 

2. Dieser BERICHT umfaBt insgesamt 6 Blatter einschlieBlich dieses Deckblatts. 

□ AuBerdem liegen dem Bericht ANLAGEN bei; dabei handelt es sich um Blatter mit Beschreibungen, Anspruchen 
und/oder Zeichnungen, die geandert wurden und diesem Bericht zugrunde liegen, und/oder Blatter mit vor dieser 
Behorde vorgenommenen Berichtigungen (siehe Regel 70.16 und Abschnitt 607 der Verwaltungsrichtlinien zum PCT). 

Diese Anlagen umfassen insgesamt Blatter. 



3. Dieser Bericht enthalt Angaben zu folgenden Punkten: 
I S Grundlage des Berichts 



Begrundete Feststellung nach Artikel 35(2) hinsichtlich der Neuheit, der erfinderischen Tatigkeit und der 
gewerblichen Anwendbarkeit; Unterlagen und Erklarungen zur Stutzung dieser Feststellung 



II 


□ 


III 


□ 


IV 


□ 


V 


IS 


VI 


□ 


VII 




VIII 


□ 



Bestimmte Mangel der intemationalen Anmeldung 



Datum der Einreichung des Antrags 
05/08/2000 



Datum der Fertigsteltung dieses Berichts 



20.02.2001 



Name und Postanschrift der mit der intemationalen voriaufigen 
Prufung beauftragten Behorde: 
Europaisches Patentamt 

D-80298 Munchen 
Tel. +49 89 2399 - 0 Tx: 523656 epmu d 

Fax: +49 89 2399 - 4465 



Bevollmachtigter Bediensteter 
Herter, J 

Tel. Nr. +49 89 2399 7478 
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INTERNATIONALER VORLAUFIGER 
PRUFUNGSBERICHT 



t 



Internationales Aktenzeichen PCT/DE99/04064 



I. Grundlage des Berichts 

1 . Dieser Bericht wurde erstellt auf der Grundlage (Ersatzblatter, die dem Anmeldeamt auf eine Aufforderung nach 
Artikel 14 hin vorgelegt warden, gelten im Rahmen dieses Berichts als "ursprunglich eingereicht" und sind ihm 
nicht beigefugt, weif sie keine Anderungen enthalten.): 
Beschreibung, Seiten: 

1 -5 ursprungliche Fassung 

Patentanspruche, Nr.: 

1 -6 ursprungliche Fassung 

Zeichnungen, Blatter: 

1/1 ursprungliche Fassung 



2. Hinsichtlich der Sprache: Alle vorstehend genannten Bestandteile standen der Behorde in der Sprache, in der 
die internationale Anmeldung eingereicht worden ist, zur Verfugung oder wurden in dieser eingereicht, sofern 
unter diesem Punkt nichts anderes angegeben ist. 

Die Bestandteile standen der Behorde in der Sprache: zur Verfugung bzw. wurden in dieser Sprache 
eingereicht; dabei handelt es sich urn 

□ die Sprache der Ubersetzung, die fur die Zwecke der internationalen Recherche eingereicht worden ist (nach 
Regel 23.1(b)). 

□ die Veroffentlichungssprache der internationalen Anmeldung (nach Regel 48.3(b)). 

□ die Sprache der Ubersetzung, die fur die Zwecke der internationalen vorlaufigen Prufung eingereicht worden 
ist (nach Regel 55.2 und/oder 55.3). 

3. Hinsichtlich der in der internationalen Anmeldung offenbarten Nucleotid- und/oder Aminosauresequenz ist die 
internationale vorlaufige Prufung auf der Grundlage des Sequenzprotokolls durchgefuhrt worden, das: 

□ in der internationalen Anmeldung in schriftlicher Form enthalten ist. 

□ zusammen mit der internationalen Anmeldung in computeriesbarer Form eingereicht worden ist. 

□ bei der Behorde nachtraglich in schriftlicher Form eingereicht worden ist. 

□ bei der Behorde nachtraglich in computeriesbarer Form eingereicht worden ist. 

□ Die Erklarung, daB das nachtraglich eingereichte schriftliche Sequenzprotokoll nicht uber den 
Offenbarungsgehalt der internationalen Anmeldung im Anmeldezeitpunkt hinausgeht, wurde vorgelegt. 

□ Die Erklarung, daB die in computeriesbarer Form erfassten Informationen dem schriftlichen 
Sequenzprotokoll entsprechen, wurde vorgelegt. 

4. Aufgrund der Anderungen sind folgende Unterlagen fortgefallen: 
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INTERNATIONALER VORLAUFIGER 
PRUFUNGSBERICHT 



Internationales Aktenzeichen PCT/DE99/04064 



□ Beschreibung, Seiten: 

□ Anspruche, Nr.: 

□ Zeichnungen, Blatt: 

5. □ Dieser Bericht ist ohne Berucksichtigung (von einigen) der Anderungen erstellt worden, da diese aus den 
angegebenen Grunden nach Auffassung der Behorde uber den Offenbarungsgehalt in der ursprunglich 
eingereichten Fassung hinausgehen (Regel 70.2(c)). 

(Auf Ersatzblatter, die solche Anderungen enthalten, ist unter Punkt 1 hinzuweisen;sie sind diesem Bericht 
beizufugen). 



6. Etwaige zusatzliche Bemerkungen: 



V. Begrundete Feststellung nach Artikel 35(2) hinsichtlich der Neuheit, der erfinderischen Tatigkeit und der 
gewerblichen Anwendbarkeit; Unterlagen und Erklarungen zur Stutzung dieser Feststellung 

1. Feststellung 

Neuheit (N) Ja: Anspruche 

Nein: Anspruche 1-6 

Erfinderische Tatigkeit (ET) Ja: Anspruche 

Nein: Anspruche 1-6 

Gewerbliche Anwendbarkeit (GA) Ja: Anspruche 1 -6 

Nein: Anspruche 



2. Unterlagen und Erklarungen 
siehe Beiblatt 



VII. Bestimmte Mangel der internationalen Anmeldung 

Es wurde festgestellt, daB die internationale Anmeldung nach Form oder Inhalt folgende Mangel aufweist: 
siehe Beiblatt 
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Internationales Aktenzeichen PCT/DE99/04064 



1 . Es wird auf die folgenden Dokumente verwiesen: 

D1 : US-A-5 706 362 (Yabe Sanae) 6. Januar 1 998 

D2: WO 97 06631 A (Pastor Yosef; Spiegel Ehud) 20. Februar 1997 

2. Punkt V: Begriindete Feststellung nach Artikel 35(2) hinsichtlich der 
Neuheit, der erfinderischen Tatigkeit und der gewerblichen Anwendbarkeit; 
Unterlagen und Erklarungen zur Stutzung dieser Feststellung 

2.1 Die vorliegende Anmeldung erfullt nicht die Erfordernisse des Artikels 33(2) PCT, 
weil der Gegenstand der Anspruche 1 und 6 nicht neu ist. 

Zu Anspruch 1 : 
D1 offenbart: 

- Verfahren zum Wiederfinden von Objekten in Bildern (siehe Zusammenfassung, 
Zeile 1) durch Korrelation einer Objektreferenz mit Bildwerten (siehe 
Zusammenfassung Zeilen 13-19 gestutzt durch Spalte 4, Zeilen 53-58), dadurch 
gekennzeichnet, daB 

- bei einer teilweisen Verdeckung eines Objektes die Bildwerte, die im Bild 
innerhalb des Verdeckungsbereiches liegen, durch Grauwerte des Objektes 
ersetzt werden, bevor die Korrelation durchgefiihrt wird (siehe 
Zusammenfassung, Zeile 8-13 gestutzt durch Spalte 5, Zeilen 45-48). 

Dies ist der Wortlaut des vorliegenden Anspruchs 1 , der folglich nicht neu ist im 
Sinne von Artikel 33(2) PCT. 

Zu Anspruch 6: 
D1 offenbart: 

- System zu Wiederfinden von Objekten in Bildern (siehe Zusammenfassung, 
Zeile 1), gekennzeichnet durch 

- eine Kamera zur Aufnahme des Bildes (siehe Zusammenfassung, Zeile 1), 

- einen Bilddatenspeicher zur Speicherung der Objektreferenz (siehe 
Zusammenfassung, Zeilen 3-4), 
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- einen Bilddatenprozessor zum Ersetzen von Grauwerten, die im Bild innerhalb 
des Verdeckungsbereiches liegen, durch Grauwerte der Objektreferenz (siehe 
Zusammenfassung, Zeile 8-13 gestutzt durch Spalte 5, Zeilen 45-48), und 

- eine Korrelationseinheit, die das vom Bilddatenprozessor veranderte Bild mit der 
Objektreferenz korreliert (siehe Zusammenfassung Zeilen 13-19 gestutzt durch 
Spalte 4, Zeilen 53-58). 

Anspruch 6 ist folglich auch nicht neu (Artikel 33(2) PCT). 

2.2 Die abhangigen Anspruche 2-5 enthalten keine Merkmale, die in Kombination mit 
den Merkmalen irgendeines Anspruchs, auf den sie sich beziehen, die 
Erfordernisse des PCT in bezug auf Neuheit bzw. erfinderische Tatigkeit erfullen. 
Die Grunde dafur sind die folgenden: 

Zu Anspruch 2: 
D1 offenbart: 

- daB ein Referenzbild einer Storfensterung unterzogen wird, um die Bildwerte 
innerhalb einer Stormaske durch die Grauwerte des Objektes zu ersetzen (siehe 
Zusammenfassung, Zeile 8-13 gestutzt durch Spalte 5, Zeilen 45-48 und 
Abbildung9). 

Anspruch 2 ist folglich nicht neu (Artikel 33(2) PCT). 

Zu Anspruch 3: 
D1 offenbart: 

- daB das Referenzbild einer Objektfensterung unterzogen wird, um die 
Objektreferenz zu erhalten (siehe Zusammenfassung, Zeilen 4-8). 
Anspruch 3 ist folglich nicht neu (Artikel 33(2) PCT). 

Zu Anspruch 4: 
D1 offenbart: 

1 daB vor der Verdeckung das Bild des vollstandigen Objektes gespeichert wird 
um bei der teilweisen Verdeckung die Position des Objektes zu ermitteln (siehe 
Zusammenfassung, Zeilen 6-8). 
Anspruch 4 ist folglich nicht neu (Artikel 33(2) PCT). 
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Zu Anspruch 5: 
D1 offenbart: 

- da3,im Bild verdeckte Teile des Objektes durch Teile einer gespeicherten 
Referenz erganzt werden (siehe Zusammenfassung, Zeile 8-13 gestutzt durch 
Spalte 5, Zeilen 45-48). 

Anspruch 5 ist folglich nicht neu (Artikel 33(2) PCT). 

Gegenwartig ist nicht erkennbar, welcher Teil der Anmeldung die Grundlage fur 
einen neuen, gewahrbaren Anspruch bilden konnte. 

3. Punkt VII: Bestimmte Mangel der internationalen Anmeldung 

Im Widerspruch zu den Erfordernissen der Regel 5.1 a) ii) PCT werden in der 
Beschreibung weder der in den Dokumenten D1 und D2 offenbarte einschlagige 
Stand der Technik noch diese Dokumente angegeben. 
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Verfahren und System zum Wiederfinden von Objekten in Bildern 

Die Erfindung betrifft ein Verfahren zum Wiederfinden von Objekten in Bildern durch 
Korrelation einer Objektreferenz mit Bildwerten, sowie ein System zum Wiederfinden von 
5 Objekten in Bildern. 

Fur zahlreiche Anwendungen ist es notwendig, daB Objekte in Bildern oder digitalen 
Bildsequenzen automatisch wiedergefunden werden. Dabei kann es jedoch vorkommen, 
daB Teile des Objektes verdeckt sind. 

10 

Bei einem bekannten Verfahren, das die Wiederfindung von Objekten in Bildern ermoglicht, 
wird von dem zu suchenden Objektbild eine Referenz gespeichert und diese Referenz wird 
anschlieBend innerhalb eines begrenzten Bereiches mit dem Bild korreliert. Bei der 
Korrelation wird nur der Teil der Referenz benutzt, dessen Bildpunkte zum Objekt gehoren. 
15 Durch Objektfensterung bzw. Objektmaskierung werden diejenigen Teile, die nicht zum 
Objekt gehoren, ausgeblendet. Der Ort des Korrelationsmaximums liefert die aktuelle 
Position des Objektes im Bild, weil dort die Bildpunkte mit den Objektpixeln 
ubereinstimmen. 

20 Bei diesem bekannten Verfahren besteht jedoch das Problem, daB die Korrelation nicht 
mehr die korrekte Position des Objektes liefert, wenn das Objekt teilweise in Verdeckung 
gerat. Der Grund hierfur liegt darin, daB in dem verdeckten Bereich mit Bildpunkten 
korreliert wird, die nicht zum Objekt gehoren. Durch die Abdeckung wird nur noch ein Teil 
des Objektes mit der Referenz verglichen, was zu einer ungenauen Erkennung des 

25 Objektes bzw. der Position des Objektes fuhrt. Eine unprazise Erkennung des 

Verdeckungsbereiches ergibt sehr schnell eine fehlerhafte Objektposition im Bild. 

Es ist daher die Aufgabe der vorliegenden Erfindung ein Verfahren zum Wiederfinden von 
Objekten in Bildern anzugeben, das eine prazise Erkennung und eine genauere Ermittlung 
30 der Objektposition ermoglicht. Weiterhin soil ein System zum Wiederfinden von Objekten 
in Bildern geschaffen werden, mit dem die Objektposition genau ermittelt werden kann. 



P609080 PCT 

2 



Diese Aufgabe wird gelost durch das Verfahren zum Wiederfinden von Objekten in Bildern 
gemali Patentanspruch 1 und das System zum Wiederfinden von Objekten in Bildern 
gemaB Patentanspruch 6. Weitere vorteilhafte Merkmale, Aspekte und Details der 
Erfindung ergeben sich aus den abhangigen Anspruchen, der Beschreibung und den 
5 Zeichnungen. 

Das erfindungsgemaBe Verfahren zum Wiederfinden von Objekten in Bildern umfaBt eine 
Korrelation einer Objektreferenz mit Bildwerten, wobei bei einer teilweisen Verdeckung 
eines Objektes die Bildwerte, die im Bild innerhalb des Verdeckungsbereiches liegen, 
10 durch Grauwerte des Objektes bzw. der Objektreferenz ersetzt werden, bevor die 
Korrelation durchgefuhrt wird. Dadurch werden die Fehler beim Wiederfinden des 
Objektes erheblich reduziert. 

Bei dem Verfahren wird bevorzugt ein Referenzbild einer Storfensterung unterzogen, urn 
15 die Bildwerte innerhalb einer Stormaske durch die Grauwerte des Objektes zu ersetzen. 

Vorteilhafterweise wird das Referenzbild einer Objektfensterung unterzogen, um die 
Objektreferenz zu erhalten. 

20 Bei der vorliegenden Erfindung wird insbesondere vor der Verdeckung das Bild des 

vollstandigen Objektes gespeichert um bei einer teilweisen Verdeckung die Position des 
Objektes zu ermitteln. Vorteilhafterweise werden im Bild verdeckte Teile des Objektes 
durch Teile einer gespeicherten Referenz erganzt. 

25 Das erfindungsgemaBe System zum Wiederfinden von Objekten in Bildern umfaBt eine 
Kamera zur Aufnahme eines Bildes, einen Bilddatenspeicher zur Speicherung einer 
Objektreferenz, einen Bilddatenprozessor zum Ersetzen von Grauwerten, die im Bild 
innerhalb eines Verdeckungsbereiches liegen, durch Grauwerte der Objektreferenz, und 
eine Korrelationseinheit, die das vom Bilddatenprozessor veranderte Bild mit der 

30 Objektreferenz korreliert. Das erfindungsgemaBe System ist in der Lage, den 

Verdeckungsbereich prazise zu erkennen und eine genaue Objektposition im Bild zu 
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ermitteln. Fehler werden vermieden bzw. weitgehend reduziert, indem die bereits 
gespeicherte information uber das Aussehen des Objektes verwendet wird. 

Die Erfindung orientiert sich an einem kybernetischen Grundgedanken: Das System 
speichert das Bild des vollstandigen Objektes und nutzt diese Information urn 
herauszufinden, was sich hinter der Verdeckung befindet. Der kybernetische 
Grundgedanke orientiert sich am menschlichen Beobachter, der sich das Bild des 
vollstandigen Objektes merkt und eine Vorstellung dessen hat, was sich hinter der 
Verdeckung befindet. Dieser kybernetische Grundgedanke wird in der vorliegenden 
Erfindung ausgenutzt und technisch umgesetzt, wodurch bei teilweise verdeckten 
Objekten eine sehr genaue Positionsbestimmung der Objekte erfolgen kann. 

Die Erfindung wird nachfolgend beispielhaft anhand der Zeichnungen beschrieben, in 
denen 

Figur 1 die einzelnen Stufen des erfindungsgemaBen Verfahrens grafisch darstellt; und 
Figur 2 ein FluBdiagramm des erfindungsgemaBen Verfahrens zeigt. 

Figur 1 zeigt die Stufen des erfindungsgemaBen Verfahrens beispielhaft anhand des 
Zielverfolgens. Dabei ist zunachst ein Ziel bzw. Objektl sichtbar, das mit fortschreitender 
Zeit hinter einer Verdeckung 2 verschwindet. Zu einem bestimmten Zeitpunkt sind ein 
oder mehrere Teile 1a des Objektes 1 noch zu erkennen, wahrend sich die restlichen Teile 
des Objektes 1 hinter der Verdeckung 2 befinden. Zu diesem Zeitpunkt wird ein Bild 
aufgenommen, welches das teilweise durch die Verdeckung 2 abgedeckte Objekt 1 
enthalt. 

Aus einem bekannten Referenzbild, in welchem das Ziel bzw. Objekt 1 enthalten ist, wird 
eine Objektmaske 10 erzeugt. Die Objektmaske 10 wird mit dem aufgenommenen Bild, 
das das Ziel 1 hinter der Verdeckung 2 enthalt, iiberlagert. Dies ist moglich, solange noch 
Teile 1a des Objektes 1 im Bild zu sehen sind. Durch die Uberlagerung mit der 
Objektmaske 10 entsteht eine Stormaske 20, die der Verdeckung 2 iiberlagert ist. Die 
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Stormaske 20 enthalt diejenigen Telle der Verdeckung 2, die im Bild die restlichen Teile 
des Objektes 1 uberdecken. 

Durch einen Bildddatenprozessor werden die Bildpunkte innerhalb der Stormaske 20 
5 durch die aus dem Referenzbild entnommenen Grauwerte des Objektes 1 ersetzt. Es 
ergibt sich eine Ersetzung 21 mit Bildpunkten, die den gerade verdeckten Teilen des 
Objektes 1 entsprechen. Die Ersetzung 21 wird im aufgenommenen Bild im Bereich der 
Stormaske 20 eingesetzt, so daB das nun erzeugte Bild das vollstandige Objekt 1 enthalt, 
ohne daB Teile des Objektes 1 fehlen. Das auf diese Weise mit dem Bilddatenprozessor 
10 erzeugte Bild bildet die Grundlage fur die weiteren Verfahrensschritte. 

Aus dem gespeicherten Referenzbild, das wie oben beschrieben das Objekt 1 enthalt, wird 
mit Hilfe der Objektmaske 10 eine Referenz bzw. Objektreferenz 1 1 gewonnen. Die 
Objektreferenz 1 1 wird nun mit dem Bild 22, das die Ersetzung 21 enthalt, korreliert. 
15 Durch eine Peakdetection wird das Korrelationsmaximum ermittelt. Der Ort des 
Korrelationsmaximums liefert so die genaue Position des Objektes 1 im Bild. 

Figur 2 zeigt als FluBdiagramm die Verfahrensschritte zum automatischen Finden bzw. 
Wiederfinden des Objektes 1 im aufgenommenen Bild. Die Daten eines Referenzbildes 

20 werden einer Storfensterung unterzogen. AnschlieBend erfolgt die Ersetzung derjenigen 
Bildteile, in denen sich das Objekt hinter der Verdeckung befindet, durch die Grauwerte 
des Objektes aus dem Referenzbild. Weiterhin wird das Referenzbild einer 
Objektfensterung unterzogen, die als Ergebnis die Objektreferenz liefert. In einem 
Korrelationsschritt wird die Objektreferenz mit dem Bild, das die Ersetzung enthalt, 

25 korreliert. Zuletzt wird die Peakdetection durchgefuhrt, um das Korrelationsmaximum und 
die Position des Objektes zu ermitteln. Bei dem Verfahren ist das Referenzbild 
beispielsweise ein zuvor aufgenommenes Bild sein, das das Objekt 1 enthalt. 

Dadurch, daB in der vorliegenden Erfindung im Suchbereich des Bildes die Grauwerte der 
30 Verdeckung durch die Grauwerte des Objektes ersetzt werden, ergibt sich eine wesentlich 
erhohte Prazision der Erkennung und der Positionsbestimmung von Objekten. Es erfolgt 
ein wesentlich geringerer Eingriff in die Signale, die der Korrelation unterzogen werden, als 
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bei der Ausblendung ganzer Bildteile. Durch Speicherung der einmal gewonnenen 
Information uber das Aussehen des Objektes und durch Verwendung dieser Information 
beim Auffinden des Objektes hinter einer Verdeckung, werden Fehler bei der 
Positionsbestimmung erheblich reduziert. 
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Patentanspruche 

1. Verfahren zum Wiederfinden von Objekten in Bildern durch Korrelation einer 
5 Objektreferenz (11) mit Bildwerten, dadurch gekennzeichnet, 

daB bei einer teilweisen Verdeckung (2) eines Objektes (1) die Bildwerte, die im Bild 
innerhalb des Verdeckungsbereiches liegen, durch Grauwerte des Objektes (1) ersetzt 
werden, bevor die Korrelation durchgefuhrt wird. 

10 2. Verfahren nach Anspruch 1, dadurch gekennzeichnet, daB ein Referenzbild einer 
Storfensterung unterzogen wird, um die Bildwerte innerhalb einer Stormaske (20) 
durch die Grauwerte des Objektes (1) zu ersetzen. 

3. Verfahren nach Anspruch 1 oder Anspruch 2, dadurch gekennzeichnet, daB das 

15 Referenzbild einer Objektfensterung unterzogen wird, um die Objektreferenz (1 1) zu 

erhalten. 

4. Verfahren nach einem der vorhergehenden Anspriiche, dadurch gekennzeichnet, daB 
vor der Verdeckung das Bild des vollstandigen Objektes (1) gespeichert wird um bei 

20 der teilweisen Verdeckung die Position des Objektes (1) zu ermitteln. 

5. Verfahren nach einem der vorhergehenden Anspruche, dadurch gekennzeichnet, daB 
im Bild verdeckte Teile (1a) des Objektes (1) durch Teile einer gespeicherten Referenz 
erganzt werden. 

25 

6. System zum Wiederfinden von Objekten in Bildern, 

gekennzeichnet durch 
eine Kamera zur Aufnahme eines Bildes 
30 einen Bilddatenspeicher zur Speicherung einer Objektreferenz, 

einen Bilddatenprozessor zum Ersetzen von Grauwerten, die im Bild innerhalb eines 
Verdeckungsbereiches liegen, durch Grauwerte der Objektreferenz, und 
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eine Korrelationseinheit, die das vom Bilddatenprozessor veranderte Bild mit der 
Objektreferenz korreliert. 



P609080 PCT 

8 

Zusammenfassung 

Bei einem Verfahren zum Wiederfinden von Objekten in Bildern wird eine Objektreferenz 
mit Bildwerten korreliert. Bei einer teilweisen Verdeckung des Objektes im Bild werden 

5 diejenigen Bildwerte, die im Bild innerhalb des Verdeckungsbereiches liegen, durch 

Grauwerte des Objektes ersetzt, bevor die Korrelation durchgefuhrt wird. Ein System zum 
Wiederauffinden von Objekten in Bildern hat eine Kamera zur Aufnahme eines Bildes, 
einen Bilddatenspeicher zur Speicherung einer Objektreferenz, einen Bilddatenprozessor 
zum Ersetzen von Grauwerten, die innerhalb eines Verdeckungsbereiches liegen, durch 

10 Grauwerte der Objektreferenz, und eine Korrelationseinheit die das vom 
Bilddatenprozessor veranderte Bild mit der Objektreferenz korreliert. 
[Figur 1] 
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(54) Title: METHOD AND SYSTEM FOR RELOCATING HIDDEN OBJECTS IN IMAGES 

(54) Bezeichnung: VERFAHREN UND SYSTEM ZUM WIEDERFINDEN VON VERDECKTEN OBJEKTEN IN BILDERN 

(57) Abstract 

The invention relates to a method for 
relocating objects in images. An object 
reference is correlated with image values. 
When the object is partially covered in the 
image, the image values which are located 
within the covered area in the image are re- 
placed by grey scale values of the object 

before the correlation is carried out. A sys- < m \ y- to 

tern for relocating objects in images is pro- 
vided with a camera for filming the image, 
an imagery storage unit for storing an object 
reference and an imagery processor for re- 
placing grey scale values which are located 
within the covered area, whereby said grey _ 
scale values are replaced by grey scale val- ^ft^^* *J 1 

ues of the object reference. The inventive 
system is also provided with a correlation 
unit which correlates the image with the ob- 
ject reference, whereby the image has been 
changed by the imagery processor. 

(57) Zusammenfassung 

Bei einem Verfahren zum 
Wiederfinden von Objekten in Bildern 

wird eine Objektreferenz mit Bildwerten korreliert. Bei einer teilweisen Verdeckung des Objektes im Bild werden diejenigen Bildwerte, 
die im Bild innerhalb des Verdeckungsbereiches liegen, durch Grauwerte des Objektes ersetzt, bevor die Korrelation durchgefuhrt wird. 
Ein System zum Wiederauffinden von Objekten in Bildern hat eine Kamera zur Aufnahme eines Bildes, einen Bilddatenspeicher zur 
Speicherung einer Objektreferenz, einen Bilddatenprozessor zum Ersetzen von Grauwerten, die innerhalb eines Verdeckungsbereiches 
liegen, durch Grauwerte der Objektreferenz, und eine Korrelationseinheit, die das vom Bilddatenprozessor veranderte Bild mit der 
Objektreferenz korreliert. 
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From the INTERNATIONAL BUREAU 
PCT ^ 



NOTIFICATION OF THE RECORDING 
OF A CHANGE 

(PCT Rule 92bis.1 and 
Administrative Instructions, Section 422) 



Dote of mailing (day/month/year) 
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DAIMLERCHRYSLER AG 
Intellectual Propeft 
FTP/M 

Postfach 80 04 65 
D-81663 Miincher 
ALLEMAGNE 



OS. Sep. 2000 



Applicant's or agent's file reference 
P609080 PCT 



IMPORTANT NOTIFICATION 



International application No. 
PCT/DE99/04064 



International filing date (day/month/year) 

22 December 1999 (22.12.99) 



1. The following indications appeared on record concerning: 
| X| the applicant | X| the inventor | | the agent | | 



the common representative 



Name and Address 

MOLOCHER, Bernhard 
Hecken 46 
D-85461 Bockhorn 
Germany 


State of Nationality 
DE 


State of Residence 
DE 


Telephone No. 
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2. The International Bureau hereby notifies the applicant that the following change has been recorded concerning: 
| | the person | | the name j X| the address | [ the nationality | [ the residence 
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Telephone No. 
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Teleprinter No. 



3. Further observations, if necessary: 



4. A copy of this notification has been sent to: 

| X| the receiving Office 

| | the International Searching Authority 

| | the International Preliminary Examining Authority 
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□ 
□ 



The International Bureau of WIPO 
34, chemin des Colombettes 
1211 Geneva 20, Switzerland 

Facsimile No.: (41-22) 740.14.35 

Form PCT/1B/306 (March 1994) 



the designated Offices concerned 
the elected Offices concerned 
other: 

Authorized officer 



Jocelyne Rey-Millet 

Telephone No.: (41-22) 338.83.38 
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Date of mailing (day/month/year) 

20 September 2000 (20.09.00) 



Applicant's or agents file reference 
P609080 PCT 



To: 



EADS DEUTSCHLAND GMBH 
Intellectual Property FTP/M 
Willi-Messerschmitt-Strasse 
D-85521 Ottobrunn 
ALLEMAGNE 



IMPORTANT NOTIFICATION 



International application No. 
PCT/DE99/04064 



International filing date (day/month/year) 
22 December 1999 (22.12.99) 



1. The following indications appeared on record concerning: 
| [ the applicant Q the inventor Q the agent Q the common representative 


Name and Address 

DAIMLERCHRYSLER AG 
Intellectual Property Management 
FTP/M 

Postfach 80 04 65 
D-81663 Munchen 
Germany 


State of Nationality 
DE 


State of Residence 
DE 


Telephone No. 


Facsimile No. 


Teleprinter No. 


2. The International Bureau hereby notifies the applicant that the following change has been recorded concerning: 
| | the person the name X the address Q the nationality Q the residence 


Name and Address 

EADS DEUTSCHLAND GMBH 
Intellectual Property FTP/M 
Willi-Messerschmitt-Strasse 
D-85521 Ottobrunn 
Germany 


State of Nationality 
DE 


State of Residence 
DE 
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3. Further observations, if necessary: 

The new address for correspondence in the demand has been considered as a change under 
Rule 92bis. In case of disagreement please notify the international Bureau immediately. 


4. A copy of this notification has been sent to: 
[~X| the receiving Office Q the designated Offices concerned 
| | the International Searching Authority [x\ the elected Offices concerned 
|~X| the International Preliminary Examining Authority ^\ other: 



The International Bureau of W1PO 
34, chemin des Colombettes 
1211 Geneva 20. Switzerland 



Facsimile No.: (41-22) 740.14.35 



Authorized officer 

Jocelyne Rey-Millet 
Telephone No.: (41-22) 338.83.38 



Form PCT/IB/306 (March 1994) 



003533882 




TENT COOPERATION TRu , JY 

From the INTERNATIONAL BUREAU 



PCT/DE99/04064 



PCT 

NOTIFICATION OF ELECTION 

(PCT Rule 61 .2) 


To: 

Assistant Commissioner for Patents 
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Date of mailing (day/month/year) 

20 September 2000 (20.09.00) 


International application No. 
PCT/DE99/04064 


Applicant's or agent's file reference 
P609080 PCT 


International filing date {day/month/year) 
22 December 1999 (22.12.99) 


Priority date (day/month/year) 

23 January 1999 (23.01.99) 


Applicant 

MOLOCHER, Bernhard et al 



1. The designated Office is hereby notified of its election made: 

P><| jn the demand filed with the International Preliminary Examining Authority on: 

05 August 2000 (05.08.00) 



| | in a notice effecting later election filed with the International Bureau on: 



The election | X| was 

| | was not 

made before the expiration of 19 months from the priority date or, where Rule 32 applies, within the time limit under 
Rule 32.2(b). 



The International Bureau of WIPO 
34, chemin des Colombettes 
1211 Geneva 20, Switzerland 



Facsimile No.: (41-22) 740.14.35 



Authorized officer 

Jocelyne Rey-Millet 

Telephone No.: (41-22) 338.83.38 
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Applicant's or agents file reference 
P609080 PCT 


IMPORTANT NOTIFICATION 


International application No. 
PCT/DE99/04064 


International filing date (day/month/year) 
22 December 1999 (22.12.99) 


1. The following indications appeared on record concerning: 
[>(| the applicant 0 the inventor □ the agent Q the common representative 


Name and Address 

MOLOCHER, Bernhard 
Hecken 46 
D-85461 Bockhorn 
Germany 




State of Nationality 1 State ot Residence 
DE 1 DE 




Telephone No. 




Facsimile No. 






Teleprinter No. 


2. The International Bureau hereby notifies the applicant that the following change has been recorded concerning, 
[j] the person Q the name [x] the address Q the nationality [J the residence 


Name and Address 

MOLOCHER, Bernhard 
Lethnerstrasse 7 
D-85435 Erding 
Germany 




State of Nationality 1 State ot Residence 
DE 1 DE 




Telephone No. 




Facsimile No. 






Teleprinter No. 


3w Further observations, if necessary: 
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pX] the receiving Office 
| | the International Searching Authority 
| | the International Preliminary Examining Authority 




[")<] the designated Offices concerned 

| the elected Offices concerned 
| [ other: 


The International Bureau of WIPO 
34, chemin des Colombettes 
121 1 Geneva 20, Switzerland 

Facsimile No.: (41-22) 740.14,35 


Authorized officer 

Jocelyne Rey-Millet 

Telephone No.: (41-22) 338,83.38 
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DAIMLERCHRYSLER AG 
Intellectual Property Management 
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D-81663 Munchen 
ALLEMAGNE 
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FTP/M 
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Applicant's or agent's file reference 
P609080 PCT 


IMPORTANT NOTICE 


International application No. 
PCT/DE99/04064 


International filing date (day/month/year) 

22 December 1999 (22.12.99) 


Priority date (day/month/year) 

23 January 1999 (23.01.99) 


Applicant 

LFK-LENKFLUGKORPERSYSTEME GMBH et al 



1. Notice is hereby given that the International Bureau has communicated, as provided in Article 20, the international application 
to the following designated Offices on the date indicated above as the date of mailing of this Notice: 

US 

In accordance with Rule 47.1(c), third sentence, those Offices will accept the present Notice as conclusive evidence that 
the communication of the international application has duly taken place on the date of mailing indicated above and no copy 
of the international application is required to be furnished by the applicant to the designated Office(s). 

2. The following designated Offices have waived the requirement for such a communication at this time: 

EP 

The communication will be made to those Offices only upon their request. Furthermore, those Offices do not require the 
applicant to furnish a copy of the international application (Rule 49.1 (a-bis)). 

3. Enclosed with this Notice is a copy of the international application as published by the International Bureau on 
27 July 2000 (27.07.00) under No. WO 00/43955 

REMINDER REGARDING CHAPTER II (Article 31(2)(a) and Rule 54.2) 

If the applicant wishes to postpone entry into the national phase until 30 months (or later in some Offices) from the priority 
date, a demand for international preliminary examination must be filed with the competent International Preliminary 
Examining Authority before the expiration of 19 months from the priority date. 

It is the applicant's sole responsibility to monitor the 19-month time limit. 

Note that only an applicant who is a national or resident of a PCT Contracting State which is bound by Chapter II has the 
right to file a demand for international preliminary examination. 

REMINDER REGARDING ENTRY INTO THE NATIONAL PHASE (Article 22 or 39(1)) 

If the applicant wishes to proceed with the international application in the national phase, he must, within 20 months 
or 30 months, or later in some Offices, perform the acts referred to therein before each designated or elected Office. 

For further important information on the time limits and acts to be performed for entering the national phase, see the 
Annex to Form PCT/IB/301 (Notification of Receipt of Record Copy) and Volume II of the PCT Applicant's Guide. 
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WIPO 



PCT 

INTERNATIONALER VORLAUFIGER PRUFUNGSBERICHT 

(Artikel 36 und Regel 70 PCT) 



PCT 



Aktenzeichen des Anmelders Oder Anwalts 
P609080 PCT 


siehe Mitteilung uber die Ubersendung des intemationalen 
WEITERES VORGEHEN voriaufigen Prufungsberichts (Formblatt PCT/IPEA/416) 


Internationales Aktenzeichen 
PCT/DE99/04064 


Internationales Anme\6e6a\um(Tag/Monat/Jahr) 
22/12/1999 


Prioritatsdatum (Tag/Monat/Tag) 
23/01/1999 


Internationale Patentklassifikation (IPK) Oder nationale Klassifikation und IPK 
G06T7/00 


Anmelder 

LFK-LENKFLUGKORPERSYSTEME GMBH et al. 



1. Dieser internationale vorlaufige Prufungsbericht wurde von der mit der intemationalen voriaufigen Prufung beauftragten 
Behorde erstellt und wird dem Anmelder gemaB Artikel 36 ubermittelt. 

2. Dieser BERICHT umfaBt insgesamt 6 Blatter einschlieBlich dieses Deckblatts. 

□ AuBerdem liegen dem Bericht ANLAGEN bei; dabei handelt es sich urn Blatter mit Beschreibungen, Anspruchen 
und/oder Zeichnungen, die geandert wurden und diesem Bericht zugrunde liegen, und/oder Blatter mit vor dieser 
Behorde vorgenommenen Berichtigungen (siehe Regel 70.16 und Abschnitt 607 der Verwaltungsrichtlinien zum PCT). 

Diese Anlagen umfassen insgesamt Blatter. 



3. Dieser Bericht enthalt Angaben zu folgenden Punkten: 
I K Grundlage des Berichts 



II 


□ 


III 


□ 


IV 


□ 


V 


El 


VI 


□ 


VII 




VIII 


□ 



gewerblichen Anwendbarkeit; Unterlagen und Erklarungen zur Stutzung dieser Feststellung 

Bestimmte angefuhrte Unterlagen 

Bestimmte Mangel der intemationalen Anmeldung 



Datum der Einreichung des Antrags 
05/08/2000 


Datum der Fertigstellung dieses Berichts 
20.02.2001 


Name und Postanschrift der mit der intemationalen voriaufigen 
Prufung beauftragten Behorde: 

Europaisches Patentamt 

>Sj) D-80298 Munchen 
ST 9 Tel. +49 89 2399 - 0 Tx: 523656 epmu d 
Fax: +49 89 2399 - 4465 


Bevollmachtigter Bediensteter ^^^^ 
Herter, J (i &l )) 

Tel. Nr. +49 89 2399 7478 \^o^^ 



Formblatt PCT/IPEA/409 (Deckblatt) (Januar 1994) 



V * 

INTERNATIONALER VORLAUFIGER 

PRUFUNGSBERICHT Internationales Aktenzeichen PCT/DE99/04064 



I. Grundlage des Berichts 

1 . Dieser Bericht wurde erstellt auf der Grundlage (Ersatzblatter, die dem Anmeldeamt auf eine Aufforderung nach 
Artikel 14 hin vorgelegt wurden, gelten im Rahmen dieses Berichts als "ursprunglich eingereicht" und sind ihm 
nicht beigefugt, weil sie keine Anderungen enthalten.): 
Beschreibung, Seiten: 

1-5 ursprungliche Fassung 

Patentanspruche, Nr.: 

1-6 ursprungliche Fassung 

Zeichnungen, Blatter: 

1/1 ursprungliche Fassung 



2. Hinsichtlich der Sprache: Alle vorstehend genannten Bestandteile standen der Behorde in der Sprache, in der 
die internationale Anmeldung eingereicht worden ist, zur Verfugung Oder wurden in dieser eingereicht, sofern 
unter diesem Punkt nichts anderes angegeben ist. 

Die Bestandteile standen der Behorde in der Sprache: zur Verfugung bzw. wurden in dieser Sprache 
eingereicht; dabei handelt es sich um 

□ die Sprache der Ubersetzung, die fur die Zwecke der internationalen Recherche eingereicht worden ist (nach 
Regel 23.1(b)). 

□ die Veroffentlichungssprache der internationalen Anmeldung (nach Regel 48.3(b)). 

□ die Sprache der Ubersetzung, die fur die Zwecke der internationalen vorlaufigen Prufung eingereicht worden 
ist (nach Regel 55.2 und/oder 55.3). 

3. Hinsichtlich der in der internationalen Anmeldung offenbarten Nucleotid- und/oder Aminosauresequenz ist die 
internationale vorlaufige Prufung auf der Grundlage des Sequenzprotokolls durchgefuhrt worden, das: 

□ in der internationalen Anmeldung in schriftlicher Form enthalten ist. 

□ zusammen mit der internationalen Anmeldung in computerlesbarer Form eingereicht worden ist. 

□ bei der Behorde nachtraglich in schriftlicher Form eingereicht worden ist. 

□ bei der Behorde nachtraglich in computerlesbarer Form eingereicht worden ist. 

□ Die Erklarung, daB das nachtraglich eingereichte schriftliche Sequenzprotokoll nicht uber den 
Offenbarungsgehalt der internationalen Anmeldung im Anmeldezeitpunkt hinausgeht, wurde vorgelegt. 

□ Die Erklarung, daB die in computerlesbarer Form erfassten Informationen dem schriftlichen 
Sequenzprotokoll entsprechen, wurde vorgelegt. 

4. Aufgrund der Anderungen sind folgende Unterlagen fortgefallen: 
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□ Beschreibung, Seiten: 

□ Anspruche, Nr.: 

□ Zeichnungen, Blatt: 

5. □ Dieser Bericht ist ohne Berucksichtigung (von einigen) der Anderungen erstellt worden, da diese aus den 
angegebenen Grunden nach Auffassung der Behorde uber den Offenbarungsgehalt in der ursprunglich 
eingereichten Fassung hinausgehen (Regel 70.2(c)). 

(Auf Ersatzblatter, die solche Anderungen enthalten, ist unter Punkt 1 hinzuweisen;sie sind diesem Bericht 
beizufugen). 



6. Etwaige zusatzliche Bemerkungen: 



V. Begrundete Feststellung nach Artikel 35(2) hinsichtlich der Neuheit, der erf inderischen Tatigkeit und der 
gewerblichen Anwendbarkeit; Unterlagen und Erklarungen zur Stiitzung dieser Feststellung 

1. Feststellung 

Neuheit (N) Ja: Anspruche 

Nein: Anspruche 1-6 

Erfinderische Tatigkeit (ET) Ja: Anspruche 

Nein: Anspruche 1-6 

Gewerbliche Anwendbarkeit (GA) Ja: Anspruche 1-6 

Nein: Anspruche 



2. Unterlagen und Erklarungen 
siehe Beiblatt 



VII. Bestimmte Mangel der internationalen Anmeldung 

Es wurde festgestellt, daB die internationale Anmeldung nach Form Oder Inhalt folgende Mangel aufweist: 
siehe Beiblatt 
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1 . Es wire! auf die folgenden Dokumente verwiesen: 

D1 : US-A-5 706 362 (Yabe Sanae) 6. Januar 1 998 

D2: WO 97 06631 A (Pastor Yosef; Spiegel Ehud) 20. Februar 1997 

2. Punkt V: Begrundete Feststellung nach Artikel 35(2) hinsichtlich der 
Neuheit, der erfinderischen Tatigkeit und der gewerblichen Anwendbarkeit; 
Unterlagen und Erklarungen zur Stutzung dieser Feststellung 

2.1 Die vorliegende Anmeldung erfullt nicht die Erfordernisse des Artikels 33(2) PCT, 
weil der Gegenstand der Anspruche 1 und 6 nicht neu ist. 

Zu Anspruch 1 : 
D1 offenbart: 

- Verfahren zum Wiederfinden von Objekten in Bildern (siehe Zusammenfassung, 
Zeile 1) durch Korrelation einer Objektreferenz mit Bildwerten (siehe 
Zusammenfassung Zeilen 13-19 gestutzt durch Spalte 4, Zeilen 53-58), dadurch 
gekennzeichnet, daf3 

- bei einer teilweisen Verdeckung eines Objektes die Bildwerte, die im Bild 
innerhalb des Verdeckungsbereiches liegen, durch Grauwerte des Objektes 
ersetzt werden, bevor die Korrelation durchgefuhrt wird (siehe 
Zusammenfassung, Zeile 8-13 gestutzt durch Spalte 5, Zeilen 45-48). 

Dies ist der Wortlaut des vorliegenden Anspruchs 1 , der folglich nicht neu ist im 
Sinne von Artikel 33(2) PCT. 

Zu Anspruch 6: 
D1 offenbart: 

- System zu Wiederfinden von Objekten in Bildern (siehe Zusammenfassung, 
Zeile 1), gekennzeichnet durch 

- eine Kamera zur Aufnahme des Bildes (siehe Zusammenfassung, Zeile 1), 

- einen Bilddatenspeicher zur Speicherung der Objektreferenz (siehe 
Zusammenfassung, Zeilen 3-4), 
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- einen Bilddatenprozessor zum Ersetzen von Grauwerten, die im Bild innerhaib 
des Verdeckungsbereiches liegen, durch Grauwerte der Objektreferenz (siehe 
Zusammenfassung, Zeile 8-13 gestiitzt durch Spalte 5, Zeilen 45-48), und 

- eine Korrelationseinheit, die das vom Bilddatenprozessor veranderte Bild mit der 
Objektreferenz korreliert (siehe Zusammenfassung Zeilen 13-19 gestiitzt durch 
Spalte 4, Zeilen 53-58). 

Anspruch 6 ist folglich auch nicht neu (Artikel 33(2) PCT). 

2.2 Die abhangigen Anspruche 2-5 enthalten keine Merkmale, die in Kombination mit 
den Merkmalen irgendeines Anspruchs, auf den sie sich beziehen, die 
Erfordernisse des PCT in bezug auf Neuheit bzw. erfinderische Tatigkeit erfullen. 
Die Grunde dafur sind die folgenden: 

Zu Anspruch 2: 
D1 offenbart: 

- daG ein Referenzbild einer Storfensterung unterzogen wird, um die Bildwerte 
innerhaib einer Stdrmaske durch die Grauwerte des Objektes zu ersetzen (siehe 
Zusammenfassung, Zeile 8-13 gestiitzt durch Spalte 5, Zeilen 45-48 und 
Abbildung 9). 

Anspruch 2 ist folglich nicht neu (Artikel 33(2) PCT). 

Zu Anspruch 3: 
D1 offenbart: 

- daB das Referenzbild einer Objektfensterung unterzogen wird, um die 
Objektreferenz zu erhalten (siehe Zusammenfassung, Zeilen 4-8). 
Anspruch 3 ist folglich nicht neu (Artikel 33(2) PCT). 

Zu Anspruch 4: 
D1 offenbart: 

- daB vor der Verdeckung das Bild des vollstandigen Objektes gespeichert wird 
um bei der teilweisen Verdeckung die Position des Objektes zu ermitteln (siehe 
Zusammenfassung, Zeilen 6-8). 

Anspruch 4 ist folglich nicht neu (Artikel 33(2) PCT). 
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Zu Anspruch 5: 
D1 offenbart: 

- daB im Bild verdeckte Teile des Objektes durch Teile einer gespeicherten 
Referenz erganzt werden (siehe Zusammenfassung, Zeile 8-13 gestutzt durch 
Spalte 5, Zeilen 45-48). 

Anspruch 5 ist folglich nicht neu (Artikel 33(2) PCT). 

Gegenwartig ist nicht erkennbar, welcher Teil der Anmeldung die Grundlage fur 
einen neuen, gewahrbaren Anspruch bilden konnte. 

3. Punkt VII: Bestimmte Mangel der internationalen Anmeldung 

Im Widerspruch zu den Erfordernissen der Regel 5.1 a) ii) PCT werden in der 
Beschreibung weder der in den Dokumenten D1 und D2 offenbarte einschlagige 
Stand der Technik noch diese Dokumente angegeben. 
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